Không lâu sau khi tức vị, Hiếu Tông tôn hiệu cho Thượng hoàng là Quang Nghiêu Thọ Thánh Hiến Thiên Thể Đạo Tính Nhân Thành Đức Kinh Vũ Vĩ Văn Thiệu Nghiệp Hưng Thống Minh Mô Thịnh Liệt Thái Thượng hoàng đế. Ban đầu, Hiếu Tông ra lệ cho tể tướng và trăm quan một tháng phải hai lần triều yết Đức Thọ cung. Ngày 28 tháng 7 ông đặt lệ cứ năm ngày vào Đức Thọ cung triều yết thượng hoàng một lần, về sau thượng hoàng có thánh dụ cho phép mỗi tháng chỉ phải triều yết hai lần vào các ngày 8 và 22.

Khi đó Thượng hoàng sống nhàn nhã trong cung Đức Thọ, Hiếu Tông hết mực cung kính, thường báo với Thượng hoàng những việc mình làm. Do nhàn nhã vô tư, Thượng hoàng nghĩ tới chuyện sắc tình ca múa cho vui cái tuổi già. Bấy giờ hậu phi trong cung Đức Thọ có tới hàng trăm, như Đại Lưu phi, Tiểu Lưu phi, Triệu Phu nhân ở Tín An, Vương Phu nhân từ Lạc Bình, Quách Phu nhân ở Hàm An, Trần Phu nhân từ Tân Hưng, Tôn Phu nhân quê ở Phú Bình, Thái Phu nhân quê ở Tấn Vân, Lý Phu nhân ở An Định, Phùng mĩ nhân, Hàn Tài nhân... và đặc biệt là Ngô Ngọc Nô, em họ của Thái Thượng hoàng hậu.

Tháng 2 ÂL năm 1165, Hiếu Tông triều kiến Đức Thọ cung và đích thân đi theo Thái Thượng hoàng đế, hậu đến viếng Tứ Thánh quan. Kẻ sĩ trong nước hết lời ca ngợi. Lúc đó Thượng hoàng sống nhàn nhã ở cung Đức Thọ nên nghĩ đến những trò tiêu khiển, đã cho mở rất nhiều sở ứng phụng ở bên ngoài, lại dùng thuyền chuyển thủy ngân vào cung. Năm 1170, Lại bộ Thượng thư Uông Ứng Thần lên tiếng can gián rằng cung Đức Thọ mở nhiều sở ứng phụng, và so sánh việc tiêu khiển của Thượng hoàng với việc chuyển hoa cương thạch những năm Tuyên Hòa, khiến Thượng hoàng rất tức giận. Khi đó lại có Hữu chính ngôn Viên Phu dâng sớ xin cấm việc này, Hiếu Tông không dám trái ý Thượng hoàng nên đã giáng Viên Phu làm Hộ bộ Thị lang; đày Ứng Thần ra phủ Bình Giang[61].

Tháng 4 ÂL năm 1172, Tả thừa tướng Ngu Doãn Văn bị ngự sử Tiêu Chi Mẫn đàn hặc là chuyên quyền, bất công, Doãn Văn dâng sớ xin tội. Thượng hoàng biết chuyện, khuyên Hiếu Tông không nên đuổi Doãn Văn, vì thế Hiếu Tông cho đuổi Tiêu Chi Mẫn và vẫn dùng Doãn Văn. Tuy nhiên chỉ ít lâu sau thì ông này lại xin từ chức[62]

Tháng 10 ÂL năm Thuần Hi thứ 14 đời Tống Hiếu Tông, Thượng hoàng không khỏe. Ngày Ất Hợi tức 9 tháng 11 năm 1187[5], Thái Thượng hoàng đế băng ở cung Đức Thọ, hưởng thọ 81 tuổi[63]. Ngày Bính Dần tháng 3 ÂL năm Thuần Hi 16 (1189) táng ở Vĩnh Tư lăng, quận Cối Kê, miếu hiệu là Cao Tông, thụy hiệu Thụ Mệnh Trung Hưng Toàn Công Chí Đức Thánh Thần Vũ Văn Chiêu Nhân Hiến Hiếu Hoàng đế[64].